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Поговорим про: Не поговорим про: 


‚ Неа! ’ Кеуо)В 
‚ оемте!| ° Неазган 
° Неа! СЧизег . Огадопйу ОВ 


‚ Мемогк рай опто ° 01$К МО Тайгез 


План доклада 


1. Зачем в Вед!$ отказоустойчивость? 
2. Зепипе 

3. Веаз СЧиег 

4. Как с ними потерять данные 


5. Компенсируем проблемы 
«дешево и сердито» 


‚ Альтернативный подход 


Замена 5епипе! 


Разбираем Та!оуег/мйспоуег 


‚ Тесты 


Нео!$ . «Нео!$ — это только кэш» 
и отказоустойчивость 


Нес!$ 
и отказоустойчивость 


. «Нед!$ — это только кэш» 
. Очереди 

‚ Пользовательские сессии 
‚ Нае тп\по 


и так далее 


Очереди? 


Огаег 


Моз[ ьААИ огофег ефо:|$ 


Отказоустойчивость в ореп зоигсе Неа!з: зепипе! 


о ==“) —— 


и 
О15со\егу 
Аррйсайоп 
Сопп то риитагу 


= = 
а_Л№е а_Ле 


Фичи Зеппе! 


Обнаружение реплик 


Способность обслуживать множество 
групп Ритагу + Нерйсаз 


Риб/Зи6б для топологии 


Подписаться на новые реплики / изменение 
Ритагу 


Тот же протокол НЕЗР2/НЕЗР3З 


Хорошо поддержан в клиентских 
библиотеках 


Отказоустойчивость в ореп зоигсе Неа: Диег 


Аррйсайоп 


Торооду 
Ч15со\мегу 


и = 
аа а_Ле 


Со$$р 


Фичи Вес!$ СЦизег 


Нет необходимости держать рядом 
отдельную сущность 


Переживает даже отказ та|оу 
в одном шарде 


Работа с кластером с точки зрения 
клиента проще 


Проблемы 


Зепипте! Сизег 


‚ РаН\фопеа ритагу не закрывается ‚ РанНфопеад ритагу не закрывается 
от нагрузки от нагрузки 


Пример проблемы 


Проблемы 


Зепипте! 


‚ РаН\фопеа ритагу не закрывается 
от нагрузки 


. Проблемы с изоляцией 


Сизег 


Ра\Шопеа ритагу не закрывается 
от нагрузки 


Проблемы 


Зепипте! 


Ра\Шопеа ритагу не закрывается 
от нагрузки 


Проблемы с изоляцией 


Совмещение Зещте и Вед! 
на одних узлах может порождать 
неотказоустойчивые конфигурации 


Например, две ноды 


Сизег 


Ра\Шопеа ритагу не закрывается 
от нагрузки 


Проблемы 


Зепипте! 


Ра\Шопеа ритагу не закрывается 
от нагрузки 


Проблемы с изоляцией 


Совмещение Зещите и Вед! 
на одних узлах может порождать 
неотказоустойчивые конфигурации 


Например, две ноды 


Сизег 


‚ Ранй\фопеа ритагу не закрывается 
от нагрузки 


° Голосуют только ритагу 
> количество шардов имеет значение 


Проблемы 


Зепипте! 


Ра\Шопеа ритагу не закрывается 
от нагрузки 


Проблемы с изоляцией 


Совмещение Зещте и Вед! 
на одних узлах может порождать 
неотказоустойчивые конфигурации 


Например, две ноды 


Сизег 


‚ Ранй\фопеа ритагу не закрывается 
от нагрузки 


 Голосуют только ритагу 
> количество шардов имеет значение 


° Распределение ритагу 
по доменам отказа тоже 


Быстрые решен ИЯ ° Закрываем ра\Шопеа ритагу 


® Совмещаем 5епйте!| и Вед!$ 
на одном наборе хостов и пишем 
в документации, какие 
конфигурации отказоустойчивы 


° Запрещаем создавать кластеры 
меньше чем с тремя шардами 


° Следим за распределением ритагу 
по доменам отказа и размазываем их 


Альтернатива — г4зупс 
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Роли инстансов газупс 


Мападег Сападае 

° Держит лок в ОСЗ ‚ Пытается взять лок и стать Мападег 

е Следит за живостью нод, . Обновляет информацию о локальном 
принимает решение о Гапоуег Вед! в ОС$ 

Делает эм(споуег  Обновляет состояние в локальном 


. Зепнсаспе 
Плюс все, что делает Сапааае 


° закрывает локальный Ритагу 
при потере связи с ОС$ 


Зеписаспе  Форкаем Зепипе 


 Отрываем всю логику про Тайоуег 
и соединения вовне 


» Добавляем отдельную команду 
для обновления внутреннего 
состояния 


Гапо\уег: начальная конфигурация 


= Ка5упс 
Ред! Мападег 
Риитагу 


= Кажупс 
Кед!5 


= 


Реа!5 


= 


Кед!5 
Риитагу 


Казупс 
Мападег 
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Га|о\уег: новый тападег + оН пе” старого ритагу 


= 


Реа!$ 
ОНте 


= Ка5упс 
Мападег 
Кед!$ 
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Га|оуег: новый тападег выясняет текущее состояние 


= 


Вед!5 
ОНте 


= Кажупс 
Мападег 
Кед!$ 


Мах ОР5е! 


Ред!5 


Мах РиогКу 
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Гапо\уег: остановка репликации” 


= 


Ред!$ 
ОНте 


Кер! раизе 


Кер!раизе 


Кажупс 
Кеа!$ 


= Кажупс 
Мападег 
Кед!$ 


Мах ОР5е Мах Риогку 
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Гапоу\уег: догоняем самую приоритетную до самой свежей” 


= 


Ред!$ 
ОНте 


Кер! раизе 


= Кажупс 
Мападег 
Кед!5 


Мах ОЙ5е 


КерйсаНоп 


Кажупс 
Кео!5 


Мах РиогКу 
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Еапо\уег: догоняем самую приоритетную до самой свежей” 


= 


Ред!$ 
ОНте 


Кер!раизе 


= Кажупс 
Мападег 
Кед!$ 


Мах ОЙ5еЕ 


= Казупс 
Кео!$ 


Мах Риогку + Мах ОЁ$е{ 
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Га|оуег: рготое 


= 


Ред!5 
ОНте 


Кер! раизе 


= Кажупс 


Мападег 
Кед!5 


Мах ОЁР5е! 


= 


К/О Кеа!$ 
Ритагу 


Кажупс 


Ее 


ГаНоуег: поворачиваем реплики 


= 


Ред!$ 
ОНте 


= 


В/О Вед!5 
Ритагу 


= Кажупс 
Мападег 
Кед!$ 


Мах ОР5е! 


Керйсайоп 
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ГаНоуег: открываемся на запись 


= 


Ред!$ 
ОНте 


= 


В/\М/ Веа!$ 
Ритагу 


= Кажупс 
Мападег 
Кед!$ 


Мах ОЙ5е 


КерйсаНоп 
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Га|о\уег: ра|Цюп пеа!пд 


= Ка5упс 
Кеа!$ 
Оше 


| 


= Ка5упс 
Мападег 
Кед!5 


Мах ОЙ5е 


= Ка5упс 
В/ЛЛА/ Веа!$ 
Ритагу 


КерйсаНоп 


30 


Га|оуег: переналиваем старый ритагу 


КерйсаНоп 


= Ка5упс 
Кеа!$ 
Оше 


Мах ОЙ5е 


= Ка5упс = Разупс 
м Мападег КЛМ Вед! 
Ритагу 


КерйсаНоп 


31 


Гапо\уег: открываем его на чтение 


Керйсайоп 


= Кажупс = Вазупс 
ей Мападег ВЛ! Вед! 
Ритагу 


Мах ОР5е! 


КерйсаНоп 
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Тесты 


Зепипте! 


Функциональные на сценарии 
тайоуег/эммцспомег 


’ череп 
Только пемогк рай#оп 


0С$ 


Итого 


Спиббу-мгау госкК$ 
(0(р5://900.зи/рАМ\У) 


2 


Патчить Вед!$ не так уж 
страшно 


3 


Используйте зерзеп(-Ике)- 
тесты, если не хотите 
терять данные 


(ПЕрз://ерзеп.ю} 


| 'Евгений Дюков 
Разработчик Мапаёеч Ба{аБазе$ 
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